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(S) Dreidimensionale Formerfassung mit Kamerabildern 

© Die Erfindung betrifft ein Verfahren zur Erfassung einer 
Objektform mit den foigenden Schritten: a) ein Kamera- 
bild des Objektes wi'rd erstellt; b) ein Umrift des Objektes 
in einer ersten Ebene, der in dem Kamerabild scharf er- 
scheint, wird durch eine mit der Kamera verbundene Aus- 
wertungseinheit erfaSt; c) der Fokussferungsabstand der 
Kamera wird verandert; d) ein scharfer UmriB des Objek- 
tes in einer zweiten Ebene wird durch die Auswertungs- 
einheit erfafit; e) die Schritte b) bis d) werden wiederholt, 
bis eine ausreichende Zahl von Umrissen erfafSt ist, so 
daR die raumliche Form des Objektes festgestellt werden 
kann. Sie betrifft ferner eine Vorrichtung zur Durchfuh- 
rung dieses Verfahrens. 
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Beschreibung 



Die vorliegende Erfindung betrifft ein Verfahren sowie 
eine Vorrichtung zur Erfassung einer Objektfonn. 

Es gibt verschiedene Anwendungen, bei denen es von 5 
Wichugkeit ist, die auBere Form eines Objektes genau zu 
kennen. Eine solche Anwendung liegt bei spiels weise auf 
dem Gebiet der Medizintechnik. So werden Patienten vor 
chirurgischen oder strahlentherapeutischen Maflnahmen 
z. B. mittels einer Computertomographie gescannt, urn die 10 
Lage einer Gewebsveranderung im K6rper oder in einem 
Korperteil festzustellen. Dabei werden auch Marker oder 
hervorgehobene Punkte am Korperteil mitgescannt, deren 
Positionsdaten spater in einem chirurgischen Navigations- 
system, das den Behandlungsraum interoperativ uberwacht, 15 
um als Hilfestellung fur den Chirurgen oder Strahlenthera- 
peuten zu dienen, verwertet werden. 

Bei solchen Verfahren muB nachteiligerweise vor der Be- 
handlung mit Hilfe des Navigationssystems eine aufwen- 
dige Zuordnung der Lagedaten aus dem CT-Scan zu den tat- 20 
sachlichen Raumdaten im Operationsraum erfolgen. Diese 
Zuordnung ist einerseits aufwendig, da entsprechende Mar- 
ker auf der Haut per Hand mit einem Referenzierungsgerat 
angefahren und identifiziert werden miissen; andererseits ist 
sie des ofteren ungenau, da sich beispielsweise Hautmarker 25 
beim Referenzierungsvorgang sehr leicht verschieben kon- 
nen. Automatische Referenzierungen mit Markern oder an- 
hand von natiirlichen Landmarken sind sehr rechenaufwen- 
dig. 

Ein weiterer Nachteil solcher Lage- und Formzuord- 30 
nungsverfahren besteht darin, daB sie zum Zeitpunkt der Be- 
handlung oder Operation nicht unbedingt die genauen tat- 
sachlichen Lagedaten fiir die AuBenform oder eine Innen- 
form wiedergeben. Diese Formdaten stammen namlich bei- 
spielsweise aus einer Computertomographie, die zeitlich vor 35 
dem Eingriff durchgefiihrt wurde und lediglich die Marker- 
positionen werden aktuell erfaBt. Es kann nun vorkommen, 
daB sich durch Verschiebungen die Position von Gewebe- 
punkten zu den Markern andert, und zwar schon beim 
Transport vom Computertomographen in den Behandlungs- 40 
saal. Dadurch wird die Form- und Lageerfassung im Navi- 
gationssystem unkorrekt und kann zu Fehlbehandlungen 
fiihren. 

Es ist die Aufgabe der vorliegenden Erfindung, ein Ver- 
fahren sowie eine Vorrichtung zur Erfassung einer Objekt- 45 
form bereitzustellen, welche dazu in der Lage sind, die oben 
genannten Nachteile des Standes der Tbchnik zu uberwin- 
den. Insbesondere soli eine schnelle und aktuell genaue Ob- 
jektformerfassung ermoglicht werden. 

Diese Aufgabe wird erfindungsgemaB durch ein Verfah- 50 
ren zur Erfassung einer Objektform mit den folgenden 
Schritten gelost: 

a) ein Kamerabild des Objektes wird erstellt; 

b) ein UmriB des Objektes in einer ersten Ebene, der in 55 
dem Kamerabild scharf erscheint, wird durch eine mit 
der Kamera verbundene Auswertungseinheit erfaBt; 

c) der Fokussierungsabstand der Kamera wird veran- 
dert; 

d) ein scharfer UmriB des Objektes in einer zweiten 60 
Ebene wird durch die Auswertungseinheit erfaBt; 

e) die Schritte b) bis d) werden wiederholt, bis eine 
ausreichende Zahl von Umrissen erfaBt ist, so daB die 
raumlichc Form des Objektes festgestellt werden kann. 

65 

Dieses erfindungsgemaBe Verfahren hat den groBen Vor- 
teil, daB es automatisch und sehr schnell erfolgen kann. 
Nach der Durch fUhrung des Verfahrens steht die auBere 



Form des Objektes genau und vor alien Dingen aktuell fest, 
so daB hierauf folgende Referenzierungen ebenfalls mit ei- 
ner hohen Genauigkeit durchgefiihrt werden konnen. Dies 
verkiirzt insbesondere auf dem Gebiet der chirurgischen und 
strahlentherapeutischen Behandlungen die Vorbereitungs- 
zeit fiir den Eingriff, macht diese Eingriffsvorbereitung ein- 
facher und unterstutzt die Genauigkeit der Behandlung, wo- 
durch Fehlbehandlungen vermieden werden konnen. 

Bei einer bevorzugten Ausfuhrungsform der Erfindung 
wird durch eine Erfassung von Kontrastunterschieden fest- 
gestellt, welcher UmriB in dem Kamerabild scharf erscheint. 
Wenn in der Auswertungseinheit nunmehr bekannt ist, wel- 
cher Fokussierungsabstand vorliegt, werden in diesem Be- 
reich, namlich in dem Bereich der groBten Scharfe des Bil- 
des, auch die hochsten Kontrastunterschiede vorhanden 
sein. Demnach ist der gesuchte UmriB derjenige, bei dem 
die Kontrastunterschiede am hochsten sind, und sein Ab- 
stand, das heiBt die Lage der Ebene, in der er von der Ka- 
mera entfernt liegt, ist bekannt, so daB auf dieser Ebene eine 
eindeutige UmriBzuordnung stattfinden kann. Es ist hierbei 
beispielsweise auch moglich, den Fokussierungsabstand bei 
der Erfassung eines Umrisses an einer Ebene vorilbergehend 
zu variieren, um durch Mittelwertbildung die starksten Kon- 
trastunterschiede und damit die genaue Lage der gesuchten 
Ebene zu ermitteln. 

Wenn dies fur eine genugende Anzahl von Ebenen und 
Umrissen in diesen Ebenen erfolgt, kann damit eine auBerst 
genaue Erfassung der Objektform stattfinden. 

Eine besonders genaue UmriBerfassung laBt sich errei- 
chen, wenn eine Videokamera verwendet wird, deren Schar- 
fentiefe sehr gering ist. Eine solche sehr geringe Scharfen- 
tiefe sorgt dafur, daB ein scharfer UmriB nur in einem sehr 
kleinen Abstandsbereich um den Fokussierungsabstand der 
Kamera herurn erscheint. Mit einer Scharfentiefe, die gegen 
Null geht, konnte deshalb theoretisch der exakte Abstand 
der Ebene, in welcher der erfaBte UmriB liegt, erfaBt wer- 
den. Mit sehr geringen Scharf entiefen lassen sich deshalb 
sehr genaue Erfassungen vomehmen. 

Grundsatzlich konnen gemaB der Erfindung an dem zu er- 
fassenden Objekt Markierungen angebracht werden, um be- 
stimmte Objektpunkte eindeutig erfaBbar zu machen. Es 
kann sich hierbei um Lichtmarkierungen, aufgesetzte Mar- 
ker oder aufgeklebte Muster handeln, welche beispielsweise 
die Erfassung des scharfsten Bildes bzw. der hochsten Kon- 
trastunterschiede vereinfachen. 

Die Auswertungseinheit, die beim erfindungsgemaBen 
Verfahren verwendet wird, ist vorzugs weise ein Computer 
mit einem Bildverarbeitungsprogramm, wobei analoge 
Bildsignale (durch einen Analog-ZDigitalwandler), die von 
der Kamera erfaBt werden, digitalisiert und dann verarbeitet 
werden. 

Eine besonders vorteilhafte Ausfuhrungsform des erfin- 
dungsgemaBen Verfahrens wird dann erzielt, wenn die Ka- 
mera eine Kamera eines chirurgischen Mikroskops ist. Bei 
hohen VergroBerungen wird namlich die Scharfentiefe ge- 
ringer, so daB die oben in diesem Zusammenhang schon an- 
gesprochenen Vorteile erzielt werden konnen. Im medizini- 
schen Bereich und in Kombination mit einem Navigations- 
system kann die vorliegende Erfindung grundsatzlich in 
zweierlei Art und Weise Anwendung finden. Einerseits kann 
die Form eines zu behandelnden Korperteils eines Patienten 
als Objekt erfaBt werden, wobei die erfaBte Form durch ein 
das Behandlungsgebiet uberwachendes Navigationssystem 
verarbeitet wird, um so die auBere Form des Korperteils bei 
der Navigation einbeziehen zu konnen. Andererseits besteht 
die Moglichkeit, am Objekt mindestens einen durch das Na- 
vigationssystem erfaBbaren Marker anzubringen, um die 
auch die von der Kamera erfaBte Markerposition zu verwen- 
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den, urn die Lage und Form des Objekts dem Navigationssy- 
stem zuzuordnen. 

NatUrlich k6nnen fiir die Zuordnung im Navigationssy- 
stem auch natlirliche Landmarken und kUnstliche Marker in 
Kombination verwendet werden. 

Wenn eine natlirliche Landmarke zur Zuordnung verwen- 
det wird, wind gemafi dem erfindungsgemaBen Verfahren am 
Objekt mindestens ein durch das Navigationssystem erfaB- 
barer Punkt ausgewahlt (beispielsweise die Nasenwurzel ei- 
nes Patienten), um uber die auch von der Kamera erf afite Po- 
sition dieses Punktes bzw. mehrerer dieser Punkte die Lage 
und Form des Objekls dem Navigationssystem zuzuordnen. 

Das erfindungsgemafie Verfahren kann zur Verifizierung 
und Aktualisierung der gewiinschten Positionsdaten zusam- 
men mit einem Navigationssystem zur Lagereferenzierung 
verwendet werden, und zwar vorzugsweise bei einem Strah- 
lentherapieverfahren oder bei einem chirurgischen EingrifF. 
Dies erhoht die Behandlungsgenauigkeit. 

Vorteilhafterweise wird hierbei die erf afite Form eines 
Korperteils derjenigen zugeordnet, welche durch ein pre- 
operatives Scan verfahren, z. B. eine Computertomographie 
oder eine Kemspintomographie, bestimmt wurde. Hier- 
durch kann, auch wenn sich wahrend des Patiententranspor- 
tes eine Lageveranderung ergeben hat, also die CT- oder 
Kernspintomographie-Positionsdaten nicht mehr vollstan- 
dig korrekt sind, ein Abgleich und eine Lagekorrektur 
durchgefuhrt werden, wodurch wiederum Fehlbehandlun- 
gen vermieden werden konnen. Ein groBer Vorteil ist hier- 
bei, daB der erfindungsgemafie Erfassungsvorgang durchaus 
auch wahrend einer Operation, das heiBt wahrend eines chir- 
urgischen EingrifTs, am offenen Korperteil vorgenommen 
werden kann. Dabei konnen natiirlich auch die Umrisse in 
der geschaffenen KorperofFnung erfafit und zur Abglei- 
chung des gescannten Bildes verwendet werden. Die schon 
entfernten Teile konnen dann auch in dem vom Navigations- 
system gelieferten Bild ausgeschnitten werden, um dem be- 
handelnden Chirurgen eine bessere und aktuellere Behand- 
lungsunterstiitzung zu gewahren. Dabei werden jeweils bei- 
spielsweise Dichtewerte erstellt, die genau der neuen Ober- 
flache entsprechen. 

Des weiteren kann das erfindungsgemafie Verfahren na- 
tiirlich auch dazu verwendet werden, einen intelligenten Au- 
tofokus zur Verfugung zu stellen. Hierzu wird die erfafite 
Objektform, die in der Auswertungseinheit schon vorliegt, 
dazu verwendet, um automatisch durch den Benutzer vorge- 
gebene Objektpunkte bzw. -ebenen zu fokussieren. Der Be- 
nulzer kann also beispielsweise in sein Navigationssystem 
eingeben, in welcher Umrifiebene er ein scharfes Bild erhal- 
ten mochte, und zwar z. B. durch Koordinateneingabe oder 
durch die Verwendung eines taktilen Bildschirms. Die Ka- 
mera kann dann exakt diese Umrifiebene fokussieren. 

Ferner ist es durch die voriiegende Erfindung moglich, 
ein "superscharfes Bild" bzw. ein "unendlich scharfes Bild" 
zu erhalten. Die erfafite Objektform kann namlich auch dazu 
verwendet werden, ein in jeder Tiefe scharfes Bild zu erstel- 
len. Hierzu wird jeweils der scharfe Bereich (Kontur) - z. B. 
ein Ring von 2 mm bis 3 mm Breite - aus jedem Bild extra- 
hiert und mit den anderen scharfen Bereichen aus anderen 
Fokussierungsebenen zu einem Gesamtbild zusammenge- 
setzt. 

Ganz allgemein soil hier noch hinzugefiigt werden, dafi 
Objekte gemafi dem erfindungsgemaBen Verfahren durch- 
aus von verschiedenen Seiten her aufgenommen werden 
konnen, wobei entweder uber eine genau bekannte neue Ka- 
meraposition oder durch die Zuordnung von kunstlichen 
Markem oder natiirlichen Landmarken rechnerisch eine Zu- 
ordnung der beiden Erfassungen erfolgt, so dafi ein Gesamt- 
bild entsteht. Dadurch ktinnen auch Probleme vermieden 



werden, die durch Hinterschneidungen am Objekt entstehen 
und die Erfassung kann vervollstandigt werden. 

Die erfindungsgemafie Vorrichtung zur Erfassung einer 
Objektform weist eine Kamera auf, die eine Einrichtung zur 
5 automatisch oder manuell ansteuerbaren Anderung des Fo- 
kussierungsabstandes hat. Ferner umfafit sie eine Auswer- 
tungseinheit, die mit der Kamera verbunden ist und die in 
verschiedenen Fokussierungsabstanden bzw. -ebenen scharf 
erscheinende Umrisse des Objektes nacheinander erfafit, bis 

10 eine ausreichende Zahl von Umrissen erfaBt ist, so dafi die 
raumliche Form des Objektes festgestellt werden kann. 

We schon oben erwaW, ist es hierbei von Vorteil, wenn 
die Kamera eine Videokamera (digital oder analog) ist, de- 
ren Scharfentiefe sehr gering ist. Wie ebenfalls schon bei der 

15 Beschreibung des erfindungsgemaBen Verfahrens erlautert 
wurde, ist die Auswertungseinheit vorzugsweise ein Com- 
puter mit einem Bildverarbeitungsprogramm, wobei digitale 
Bildsignale verarbeitet werden bzw. analoge Bildsignale, 
die von der Kamera erfafit werden, digitalis iert und dann 

20 verarbeitet werden, und wobei das Bildverarbeitungspro- 
gramm insbesondere durch eine Erfassung von Kontrastun- 
terschieden feststellt, welcher Umrifi in dem Kamerabild 
scharf erscheint. Die Kamera ist bevorzugt diejenige an ei- 
nem chirurgischen Mikroskop. 

25 Die Erfindung wird nun im weiteren anhand einer bevor- 
zugten Ausfuhrungsform und unter Bezugnahme auf die 
beiliegende Zeichnung naher erlautert. 

In der Zeichnung ist schematisch eine erfindungsgemafie 
Vorrichtung zur Erfassung der Form eines Objektes darge- 

30 stellt. In dem dargestellten Beispiel tragt das vereinfacht 
dargestellte Mikroskop 3 eine Kamera 1, und zwar in diesem 
Fall eine Videokamera mit einer sehr geringen Scharfen- 
tiefe. 

Die Videokamera 1 erstellt ein Kamerabild des Objektes 

35 2 in dem gestrichelt dargestellten Aufnahmebereich. 

Das Objekt 2 hat eine unregelmafiige Aufienform. Zur Er- 
fassung der Form des Objektes 2 wird nunmehr beispiels- 
weise von oben herab eine Ebene nach der anderen durch 
die Veranderung, insbesondere automatische Veranderung 

40 des Fokussierungsabstandes der Kamera 1 scharf gestellt. In 
der Zeichnung sind als Beispiel drei Ebenen 4, 5 und 6 ge- 
zeigt, die nacheinander angefahren werden, Tatsachlich 
wird bei der Formerfassung natiirlich eine sehr viel groBere 
Anzahl von Ebenen angefahren, und zwar so viele, wie zur 

45 genauen Erfassung der Objektform notwendig sind. Bei sehr 
komplizierten Objektformen kann auch automatisch in be- 
stimmten Abstandsbereichen die Anzahl der Fokussierungs- 
ebenen erhoht werden. 
Beim Anfahren der Ebenen 4, 5 und 6, wie sie in der Figur 

50 dargestellt sind, wird jeweils ein UmriB des Objektes 2 
scharf erscheinen, der in der Zeichnung fur die jeweiligen 
Ebenen gepunktet in Projektion dargestellt ist. Die aufiersten 
Punkte sind fur die jeweiligen Ebenen linksseilig mit 7, 8 
und 9 bezeichnet und etwas verstarkt dargestellt. Wenn die 

55 Kamera 1 automatisch ihren Fokussierungsabstand bei- 
spielsweise auf die Ebene 4 einstellt, werden alle Punkte 7 
am Objekt 2 in dieser Ebene scharf erscheinen und aus die- 
sen scharfen Punkten kann nunmehr der UmriB des Objekts 
2 in der Ebene 4 ermittelt werden. Dazu werden die Bildda- 

60 ten aus der Kamera 1 uber eine Datenleitung 10 zu einem 
Computer C ubertragen, der die analogen Bildsignale digita- 
lisiert und mittels eines Bildverarbeitungsprogramms die 
Umrifidaten feststellt. 
Wenn dieser Vorgang dann fur weitere Ebenen, z. B. die 

65 Ebenen 5 und 6, in den meisten Fallen jedoch auch fiir viele 
dazwischenliegende Ebenen, wiederholt wird, laBt sich da- 
mit die Form des Objektes 2 genau und aktuell erfassen. 



DE 199 44 516 A 1 

5 6 



Patentanspriiche 

1 . Verfahren zur Erfassung einer Objektform mit den 
folgenden Schritten: 

a) ein Kamerabild des Objektes wird erstellt; 5 

b) ein UmriB des Objektes in einer ersten Ebene, 
der in dem Kamerabild scharf erscheint, wird 
durch eine mit der Kamera verbundene Auswer- 
tungseinheit erfaBt; 

c) der Fokussierungsabstand der Kamera wird 10 
verandert; 

d) ein scharf er UmriB des Objektes in einer zwei- 
ten Ebene wird durch die Auswertungseinheit er- 
faBt; 

e) die Schritte b) bis d) werden wiederholt, bis 15 
eine ausreichende Zahl von Umrissen erfaBt ist, so 
daB die raumliche Form des Objektes festgestellt 
werden kann. 

2. Verfahren nach Anspruch 1, bei dem durch eine Er- 
fassung von Kontrastunterschieden festgestellt wird, 20 
welcher UmriB in dem Kamerabild scharf erscheint. 

3. Verfahren nach Anspruch 1 oder 2, bei dem als Ka- 
mera eine Videokamera verwendet wird, deren Schar- 
fentiefe sehr gering ist. 

4. Verfahren nach einem der Anspruche 1 bis 3, bei 25 
dem an dem Objekt Markierungen angebracht werden, 
urn bestimmte Objektpunkte eindeutig erfaBbar zu ma- 
chen. 

5. Verfahren nach einem der Anspruche 1 bis 4, bei 
dem die Auswertungseinheit ein Computer mil einem 30 
Bildverarbeitungsprogramm ist, wobei digitale Bildsi- 
gnale verarbeitet werden bzw. analoge Bildsignale, die 
von der Kamera erfafit werden, digitalisiert und dann 
verarbeitet werden. 

6. Verfahren nach einem der Anspruche 1 bis 5, bei 35 
dem eine Kamera an einem chirurgischen Mikroskop 
verwendet wird. 

7. Verfahren nach einem der Anspruche 1 bis 7, bei 
dem die Form eines zu behandelnden Korperteils eines 
Pali en ten als Objekt erfaBt wird, wobei die erfaBte 40 
Form durch ein das Behandlungsgebiet uberwachendes 
Navigationssystem verarbeitet wird, urn so die auBere 
Form des Korperteils bei der Navigation einbeziehen 

zu konnen. 

8. Verfahren nach Anspruch 7, dadurch gekennzeich- 45 
net, daB am Objekt mindestens ein durch das Navigati- 
onssystem erfaBbarer Marker angebracht wird, um 
uber die auch von der Kamera erfaBte Markerpositi- 
on(en) die Lage und Form des Objektes im Navigati- 
onssystem zuzuordnen. 50 

9. Verfahren nach Anspruch 7, dadurch gekennzeich- 
net, daB am Objekt mindestens ein durch das Navigati- 
onssystem erfaBbarer fester Punkt ausgewahlt wird, um 
uber die auch von der Kamera erfaBte Position dieses 
Punktes bzw. dieser Punkte die Lage und Form des Ob- 55 
jektes im Navigationssystem zuzuordnen. 

10. Verfahren nach einem der Anspruche 7 bis 9, wel- 
ches zusammen mit einem Navigationssystem zur La- 
gereferenzierung bei einem Strahlentherapie verfahren 
oder bei einem chirurgischen Eingriff verwendet wird. 60 

11. Verfahren nach einem der Anspruche 7 bis 10, bei 
dem die erfaBte Form eines Korperteil derjenigen zuge- 
ordnet wird, welche durch ein preoperatives oder intra- 
operatives Scanverfahren, z. B. eine Computertomo- 
graphie oder eine Kemspintomographie bestimmt 65 
wurde, um einen Abgleich bzw. eine Lagekorrektur 
durchzufiihren. 

12. Verfahren nach einem der Anspriiche 1 bis 6, bei 



dem die erfaBte Objektform dazu verwendet wird, au- 
tomatisch durch den Benutzer vorgegebene Objekt- 
punkte bzw. -ebenen zu fokussieren. 

13. Verfahren nach einem der Anspruche 1 bis 6, bei 
dem die erfaBte Objektform dazu verwendet wird, ein 
in jeder Hefe scharfes Bild zu erstellen. 

14. Vorrichtung zur Erfassung einer Objektform mit 
einer Kamera (1), die eine Einrichtung zur automatisch 
oder manuell ansteuerbaren Anderung des Fokussie- 
rungsabstand aufweist, sowie eine Auswertungsein- 
heit, die mit der Kamera (1) verbunden ist und die in 
verschiedenen Fokussierungsabstanden bzw. ebenen 
(4, 5, 6) scharf erscheinenden Umrisse des Objektes (2) 
nacheinander erfaBt, bis eine ausreichende Zahl von 
Umrissen erfaBt ist, so daB die raumliche Form des Ob- 
jektes (2) festgestellt werden kann. 

15. Vorrichtung nach Anspruch 14, bei der die Kamera 
eine Videokamera ist, deren Scharfentiefe sehr gering 
ist. 

16. Vorrichtung nach Anspruch 14 oder 15, bei der die 
Auswertungseinheit ein Computer mit einem Bildver- 
arbeitungsprogramm ist, wobei analoge Bildsignale, 
die von der Kamera erfaBt werden, digitalisiert und 
dann verarbeitet werden, wobei das Bildverarbeitungs- 
programm durch eine Erfassung von Kontrastunter- 
schieden feststellt, welcher UmriB in dem Kamerabild 
scharf erscheint. 

17. Vorrichtung nach einem der Anspriiche 14 bis 16, 
bei der die Kamera an einem chirurgischen Mikroskop 
angebracht ist. 
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